NOTE SUR LES SOUS-GROUPES COMPACTS 
D'HOMEOMORPHISMES DE LA SPHERE 



BORIS KOLEV 

Resume. L'objet de cet article est d'exposer la demonstration du fait 
que tout sous-groupe compact d'homeomorphismes de la spMre est 
topologiquement conjugue a un sous-groupe ferme du groupe orthog- 
onal 0(3). 



1. Introduction 

Le resultat que nous nous proposons d'exposer dans cet article, a savoir que 
tout sous-groupe compact d'homeomorphismes de S'^ est topologiquement 
conjugue a un sous-groupe ferme du groupe orthogonal 0(3) se situe dans le 
cadre plus general d'une suite de questions connue sous le nom de 5*^ probleme 
de Hubert (213 E^. Plus precisement, soit G un groupe localement compact 
qui agit fidelement sur une variete M, on se pose les questions suivantes : 

(1) G est-il necessairement localement euclidien^ ? 

(2) Si G est localement euclidien, est-ce un groupe de Lie? 

(3) Si G est un groupe de Lie, existe-il une structure analytique sur M 
invariante par G ? 

La reponse a la premiere question n'est pas connue en dehors de quelques 
cas particuliers. La reponse a la deuxieme question est positive (cf. Glea- 
son |L3| . Montgomery and Zippin |L5|). La reponse a la troisieme question 
est negative en general. II existe des contre-exemples simples dans le cas 
non compact. Citons egalement la construction par Bing (2] d'une involution 
negative de 5'^ non conjuguee a un element de 0(4), d'exemples d'homeo- 
morphisme periodique de non conjugue a un element de 80(4) (Bing 
PI, Montgomery-Zippin ^H], Bredon jS]), d'une action de U(l) sur 5^ non 
linearisable (Montgomery, Zippin ^Hl) et d'une action de U(l) sur 5'2"+2 j^qj^ 
linearisable [6]. Signalons enfin une preuve par Cairns et Ghys que toute 
action topologique de SO(n) sur M" qui preserve I'origine est globalement 
conjuguee a Taction standard. 
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Un groupe de Lie possede une propriete remarquable : il existe un voisinage 
de I'identite qui ne contient aucun sous-groupe non trivial. D'un groupe 
topologique qui possede cette propriete, on dit qu'il n'a pas de petit sous- 
groupe. Immediatement apres la demonstration par Haar, en 1933, d'une 
mesure invariante sur tout sous-groupe localement compact, von Neumann 
[21] etablit, en utilisant la theorie des representations unitaires, le resultat 
suivant (voir egalement (T9|), considere comme la premiere etape majeure 
dans la resolution du 5^ probleme : 

Theoreme 1.1 (von Neumann). Un groupe compact qui ne possede pas de 
petit sous-groupe est un groupe de Lie. 

Le but de cet article est de presenter une demonstration complete et 
moderne d'un theoreme dti a Kerekjarto pH] qui donne une caracterisation 
topologique complete du groupe des rotations et de ses sous-groupes fermes. 

Theoreme 1.2 (Kerekjarto). Tout sous-groupe compact de Homeo(S'^) est 
topologiquement conjugue a un sous-groupe ferme de 0(3). 

La preuve donnee par Kerekjarto consiste a etablir d'abord qu'un sous- 
groupe compact d'homeomorphismes de la sphere qui possedent un point fixe 
laisse invariant un disque topologique autour de ce point, et que tout groupe 
compact d'homeomorphismes du disque est topologiquement conjugue a un 
sous-groupe ferme du groupe des isometrics euclidiennes 0(2). Ces resultats 
essentiels se trouvent en realite dans des travaux anterieurs de Kerekjarto 
[HI connus pour etre extremement confus. C'est pourquoi nous en reprenons 
la demonstration complete dans un langage moderne dans les premieres sec- 
tions. Le reste de la preuve est une etude casuistique qui se base sur la nature 
et le nombre des sous-groupes qui fixent un point (les stabilisateurs). Dans 
le cas qui apparait le plus complique et qui occupe la majeur partie de 
Particle est celui ou le groupe agit transitivement sur la sphere car Kerekjarto 
reconstruit dans ce cas « a la main » la geometric euclidienne de la sphere. 
Dans notre demonstration, qui utilise le langage moderne de la geometric 
differentiel, ce cas est, au contraire, le plus simple. 

L'article originale de Kerekjarto [12] traite egalement des sous-groupes 
compact d'homeomorphismes des autres surfaces compactes, bien que la ma- 
jeure partie de l'article soit consacree a la sphere. En effet, pour les autres 
surfaces, on se ramene a des arguments elabores pour la sphere et le disque. 
Ainsi, I'etude d'un groupe compact G de transformations d'une surface fer- 
mee M de caracteristique d'Euler x(^) ^ consiste a traiter d'abord le 
sous-groupe Go des transformations isotopes a I'identite. Ce sous-groupe Go 
est ferme, distingue dans G et d'indice fini. Dans le cas ou xi^) < 0, on 
montre en passant au revetement universel que Go est trivial. Dans le cas 
du tore, une analyse analogue a celle de la section IHl ou la notion de nombre 
de rotation est remplacee par celle de vecteur de rotation, permet de con- 
clure que Go est conjugue a un sous-groupe de translation. Cette etude n'est 
pas detaillee dans cet article ou nous nous concentrons essentiellement sur 
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la sphere et le disque. On pourra consulter (Ij pour plus de details sur les 
autres surfaces. 

Un prolongement naturel de ces questions consiste a rechercher egalement 
une caracterisation topologique du groupe homographique ou d'un de ses 
sous-groupes, question egalement envisagee par Kerekjarto 0. L'etude de ce 
probleme a fait apparaitre la notion de groupe de convergence (Ghering and 
Martin p^). Mais la reponse ne semble pas aussi simple que pour le groupe 
des rotations. 

La sectionlSlde cet article est consacree a quelques proprietes generales des 
sous-groupes compacts d'homeomorphismes d'un espace metrique {X, d) et a 
l'etude locale (au voisinage d'un point fixe) lorsque X est une surface. Dans 
la section ISl on detaille la classification complete des sous-groupes compacts 
d'homeomorphismes du cercle et dans la section 01 celle des sous-groupes 
compacts d'homeomorphismes du disque. La section l^presente une demon- 
stration elementaire (dii a M. H. A. Newman) du fait qu'un sous-groupe com- 
pact d'homeomorphismes de la sphere n'a pas de petit sous-groupe. Enfin, la 
section El contient l'etude detaillee des sous-groupes compacts d'homeomor- 
phismes de la sphere. 

2. Sous-groupes compacts d'homeomorphismes d'un espace 

METRIQUE compact 

Soit {X,d) un espace metrique compact. On definit la distance de deux 
applications continues f,g:X^X par la formule : 

d{f,g) = maxd{f{x),g{x)). 

Cette distance munit le groupe des homeomorphismes de (X, d) d'une struc- 
ture de groupe topologique. Nous pouvons enoncer le resultat suivant : 

Theoreme 2.1. SoitG un sous-groupe ferme d'homeomorphismes de {X,d). 
Les propositions suivantes sont equivalentes : 

(1) G est compact. 

(2) L 'ensemble des elements de G forme une famille equicontinue. 

(3) // existe une distance sur X pour laquelle les elements de G sont des 
isometrics. 

Demonstration. (1) =^ (3) est une consequence de I'existence de la mesure de 
Haar sur G. En effet, ceci nous permet de construire une distance invariante 
en prenant la « moyenne » pour la mesure de Haar des images de la distance 
d par les elements de G. (3) =^ (2) est trivial et (2) =^ (1) est un corollaire 
direct du theoreme d'Ascoli. □ 

En particulier, I'ensemble des iteres d'un element / appartenant a un 
groupe compact d'homeomorphismes forme une famille equicontinue. Nous 
introduirons la definition suivante : 
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Definition 2.2. Un homeomorphisme / d'un espace metrique compact {X, d) 
est regulier si la famille des iteres de / est equicontinue, autrement dit si 
Ve > 0, 3a > tel que : 

(2.1) d{x,y)<5^d{r{x),ry))<e, Vn. 

Citons quelques exemples : un homeomorphisme periodique, une isometric 
pour la distance d sont des homeomorphismes reguliers. On pent montrer le 
result at suivant (Ij : 

Lemme 2.3. Soit f un homeomorphisme regulier, alors la fermeture du 
groupe engendre par f est compact. 

Dans le cas ou X est la sphere 5^, ou plus generalement une surface 
compacte, nous pouvons expliciter completement la dynamique d'un groupe 
compact d 'homeomorphisme au voisinage d'un point fixe. 

Lemme 2.4. Soit G un sous-groupe compact d 'homeomorphismes de la sphere 
5^ et D C S'^ un disque topologique ferme. Alors le compact 

^ = U 9{D) 

est localement connexe. 

Demonstration. Commengons par rappeler qu'un espace metrique compact 
est localement connexe si et seulement si pour tout e > 0, on peut I'ecrire 
comme une reunion finie de compacts connexes de diametre inferieur a e. 

Soit e > 0. Choisissons une triangulation de D dont les cellules ei , 62, . . . , e^, 
sont de diametre inferieur a (p[e), ou (p{e) est la borne superieure des nombres 
positifs a tel que : 

d{x,y) <a^ d{g{x),g{y)) < e, 

pour x,y £ S'^ et g € G. 

Soit /9 > 0, tel que I'interieur de toute cellule contienne une boule 
B(xi, p). Alors 

(2.2) B{g{xi),ip{p))Cg{ei), Vi, V5. 

Par consequent, I'aire de chaque cellule g{ei) est minoree par 47r sin (/?(/>) et 
la famille {^(ei)}^ ^ ne contient seulement qu'un nombre fini de cellules deux 
a deux disjointes. 

Dans cette famille, soit je'^^, . . . , Cp} une sous-famille finie, de cardinal 
maximal, de cellules deux a deux disjointes. Alors pour tout g £ G et tout 
i G {1, . . . , r}, il existe j E {1, . . . ,p} tel que e'j H g{ei) 7^ 0. Pour k G 
{1, . . . notons Mfc la fermeture de I'union de toutes les cellules g{ei) qui 
rencontrent e^. Alors est un compact connexe de diametre inferieur a 3e 
(le diametre de chaque cellule g{ei) etant majore par e) et 

V 

(2.3) K = U Mfc, 

fc=i 
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ce qui acheve la demonstration. □ 

Theoreme 2.5. Soit G un sous-groupe compact d'homeomorphismes de la 
sphere S'^ et xq un point fixe de G. Alors il existe un systeme fondamental 
de voisinage de xq, constitue par des disques topologiques invariants par G. 

Remarque 2.6. D'apres le Theoreme 12. 1| G laisse invariant une distance 6. 
On pent done etre tenter de croire que les boules (pour cette distance 6), 
centrees au point xq, fournissent ce systeme de disques invariants. Mais ceci 
ne fonctionne pas car on ne sait rien, a priori, de cette distance invariante 6 
obtenue en moyennant par G la distance euclidienne : elle n'a pas de raison 
d'etre riemannienne. 

La demonstration du Theoreme 12.51 repose sur un resultat classique de 
topologie du plan qui se demontre a la fois par des methodes purement 
topologiques ^3 et par des methodes issues de la geometric complexe 

CHI. 

Theoreme 2.7. Soit K un compact, connexe, localement connexe, non vide 
de S"^ , non reduit d un point et sans point de coupure^ . Alors la frontiere de 
chaque composante de S'^\K est une courbe fermee simple. 

Demonstration du Theorem.e l^.,'^ Donnons-nous arbitrairement e > 0. Nous 
pouvons trouver (5 > tel que : 

(2.4) d{x, y)<6^ d{g{x),g{y)) < e, Vx, y G 5^ V5 G G, 
puis rj > tel que 

(2.5) dix, y)<r]^ d{g{x),g{y)) < 6, Vx, y G 5^ V5 G G. 

Soit D le disque euclidien (ferme) de centre xq et de rayon rj. Formons le 
compact, connexe, invariant : 

K= [JgiD). 

geG 

D'apres H2.4|l . on a K C B{xq, 6). Designons par Voo la composante de 
qui contient 5^ \ B{xo, 6). Soit g £ G. En vertu de (|2.5|) . on a 

g{S^\Bixo,e))cS^\Bixo,S). 

Par consequent : 

g{S^\B{xo,e))cV^ng{Voo), 

et done ^(Ko) = ^00 ■ 

Par ailleurs, d'apres le lemme ITU K est localement connexe. On pourra 
verifier que I'adherence d'un ouvert connexe, non vide de la sphere ne possede 
pas de point de coupure. II en est done ainsi de K qui est I'adherence de 
I'ouvert connexe, non vide 

U= \Jg(intm- 

g&G 

^Un point x £ K est un point de coupure si K\ {x} n'est pas connexe. 
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Par suite, chaque composante connexe du complement aire de K est un disque 
topologique en vertu du theoreme 12.71 En particulier, la frontiere de Voo est 
une courbe fermee simple invariante et le disque topologique borde par cette 
courbe et contenant xq est invariant et contenu dans la boule B{xq,£). □ 

3. SOUS-GROUPES COMPACTS D'HOMEOMORPHISMES DU CERCLE 

Commengons par demontrer les resultats elementaires suivants : 

Lemme 3.1. Soit f : [0, 1] — > [0, 1] un homeomorphisme regulier et crois- 
sant, alors f = Id. 

Soit f : ^ un homeomorphisme regulier, qui preserve I 'orientation 
et possede un point fixe, alors f = Id. 

Demonstration. Soit / : [0, 1] [0, 1] un homeomorphisme regulier et crois- 
sant. Par I'absurde, supposons / 7^ Id, et soit ]a,b[ une composante de 
[0, 1] \ Fix{f). On a /(a) = a, f{b) = b et (par exemple) : 

f{x) > X, Vx G]a, b[. 

Alors, I'orbite par / de tout point de ]a,b[ converge vers b, ce qui entre en 
contradiction avec la regularite de / qui impose que I'orbite d'un point voisin 
de o reste proche de a. 

Soit maintenant / : — > 5^ un homeomorphisme regulier, qui preserve 
I'orientation et possede un point fixe. L'etude d'un relevement de /, 

/ : M ^ M, 

qui possede un point fixe x, nous ramene au resultat precedent en considerant 
la restriction de / a I'intervalle [5,5; + 1]. □ 

Soit / un homeomorphisme de qui preserve I'orientation et / : M — > M 
un relevement de /. On rappelle que la limite 

(3.1) ^(/) = lim /~"(^)-^ 



n 



existe toujours est ne depend pas du point x G M (voir ^JJ). Si /' est un 
autre relevement de / alors 9{f) — 9{f') est un entier. On note p{f) la classe 
residuelle de ces nombres modulo Z et on I'appelle le nombre de rotation de 
/• 

Lemme 3.2. Soit G un sous-groupe compact d'homeomorphismes du cercle 
qui preservent I'orientation, alors I 'application nombre de rotation 

p:G^U(l) 

est un morphisme continu et injectif. 

Demonstration. En moyennant les images par G de la mesure canonique de 
5^ a I'aide de la mesure de Haar sur G, on obtient une mesure de probabilite 
/i sur le cercle invariante par G. 
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Soit f € G. On peut reecrire I'expression (|3.H1 sous la forme 



n-l 



(3.2) e{f) = lim 



n — ' n 

k=0 



oil if ^ : ^ est la fonction induite par I'application periodique 

X I— > f{x) — X, 5; S M. 

Par consequent, d'apres le theoreme ergodique de Birkhoff (voir par exemple 
(221), on a 



(3.3) e{f) = / dfi . 

Enfin, on demontre sans difficulte, a partir de la definition de ipj^ la rela- 
tion de cocyde : 

Par suite, si / et 5 sont deux elements quelconques du groupe G, on obtient 

(3.4) 6{fo~g)= [ ^-ogdfl+ [ ipgdfi = e{f)+eig), 

ce qui etablit que p est bien un morphisme de groupe. 

L'injectivite est une consequence du Lemme IXTl et du fait qu'un homeo- 
morphisme du cercle, qui a pour nombre de rotation 0, possede un point fixe 
(voir ^). 

La continuite resulte de I'inegalite suivante : 



dif,Id)<^ie)^ e{f) 



qui est elle-meme consequence de I'equicontinuite d'un element / du groupe 
G. □ 

4. SoUS-GROUPES COMPACTS D'HOMEOMORPHISMES DU DISQUE 

Le resultat suivant generalise un resultat connu pour les homeomorphismes 
periodiques du disque 

Lemme 4.1. Un homeomorphisme regulier du disque qui est I'identite 
sur le hord est I'identite sur le disque tout entier. 

Demonstration. Formons le double de /, qui est un homeomorphisme de la 
sphere et que nous continuerons de designer par /. Nous obtenons ainsi un 
homeomorphisme regulier, qui est I'identite sur une courbe fermee simple J 
(correspondant au bord de D"^) et que nous pouvons supposer etre I'equateur. 

Choisissons sur J deux points diametralement opposes que nous noterons 
a et h. Soit d un cercle arbitraire separant les points a et h. Reprenons 
la construction donnee dans la demonstration du Theoreme 12.51 en prenant 
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pour G, la fermeture dans Homeo(5^) du groupe engendre par / et pour -D, le 
disque (ferme) delimite par d et contenant a. Notons, comme precedemment 

^ = U 9iD) 

geG 

et designons par A la composante de b dans S*^ \ K . Alors A est un disque 
topologique invariant borde par une courbe fermee simple que nous noterons 
5. Cette courbe separe les points a et 6 et rencontre done necessairement la 
courbe J. Par consequent, en utilisant a nouveau le lemme m| on en deduit 
que f = Id sur 6. Or, par construction 

5 C U gid), 

et done 6 C d (car 6 C Fix{G)), ce qui n'est possible que si 6 = d. Le cercle 
d ayant ete choisi arbitrairement, ceci montre que f = Id sur 

Corollaire 4.2. Soit f G ILomeo^{D^) un homeomorphisme regulier, dif- 
ferent de I'identite. Alors f possede un point fixe unique et ce point est situe 
a I'interieur du disque. 

Demonstration. D'apres le theoreme du point fixe de Brouwer, / possede au 
moins un point fixe xq. Si / 7^ Id, il resulte du lemme Wl\ et du lemme im 
que ce point fixe se trouve a I'interieur du disque. 

Nous allons maintenant montrer que si / possede un second point fixe xi 
alors / = Id. Pour cela, construisons a I'aide du theoreme 12. 5| une courbe 
fermee simple invariante J G 'mi{D'^) qui separe les deux points fixes et borde 
un disque topologique (ouvert) A contenant xq. Par construction, I'anneau 
topologique (ferme) A = \ A et invariant par / et contient I'autre point 
fixe, xi. Soit 

/ : M X [0, 1] ^ M X [0, 1] 

un relevement de la restriction de / a ^. On pent verifier que / est un 
homeomorphisme regulier de M x [0,1] (pour la metrique standard). Soit 
: A — > M la fonction definie par 



Pi {fix) - , 



oil pi est la projection sur le premier facteur du produit M x [0, 1]. La regu- 
larite de / implique I'existence et I'unicite (independance par rapport a x) 
de la limite 

r.V/(r(^)) 



lim > 

n ^ 

k=0 



que nous noterons 9{f) comme dans la preuve du lemme IH.21 Soit xi un 
relevement de xi et choisissons pour / un relevement de / qui fixe xi. Alors 
on a necessairement 9{f) = et ceci impose a / d'avoir un point fixe sur 
dD^ (voir p^). II resulte alors du lemme ITTl que / est I'identite sur dD^ 
puis que que / est I'identite sur le disque d'apres le lemme WA\ □ 
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Corollaire 4.3. Soit G un sous-groupe compact d'homeomorphismes du 
disque D^. La restriction au bord 

R:G^ Homeo((9L>^) 

est un morphisme continu et injectif. 

Demonstration. La restriction au bord d'un sous-groupe d'homeomorphismes 
du disque est toujours un morphisme continu mais n'est pas injectif en 
general. Soit g € G un element du noyau de R. Comme g est regulier, alors 
g = Id en vertu du lemme ITTl et done R est injectif si G est compact. □ 

En combinant le corollaire 14. HI avec le lemme 1221 on obtient : 

Corollaire 4.4. Tout sous-groupe compact G de Homeo'''(D^) est isomorphe 
(en tant que groupe topologique) a un sous-groupe ferme de U(l). 

Si G est fini, il est engendre par un element periodique /. Dans ce cas, 
on montre que / est conjugue a une rotation euclidienne (voir Sinon, 
G = U(l) et nous allons etablir le result at suivant : 

Theoreme 4.5. Toute action continue et fidele du groupe U(l) sur le disque 
est topologiquement conjuguee d I'action standard de 80(2). 

Nous diviserons la demonstration de ce resultat en deux etapes : nous 
montrerons d'abord que la structure des orbites d'un tel groupe est identique 
a celle de Taction standard et ensuite, ce qui est la partie la plus delicate, 
qu'il existe un arc transverse aux orbites, ce qui nous permettra de conclure. 

Lemme 4.6. Les orbites de toute action continue et fidele de U(l) sur le 
disque sont constitutes par un point fixe unique xq d I'interieur du disque 
et des courbes fermees simples qui entourent ce point. 

Demonstration. Soit G I'image de U(l) dans Roineo{D^) et f e G un ele- 
ment d'ordre infini. L'unique point fixe xq de / donne par le corollaire 14.21 
est egalement un point fixe de G car les iteres de / forment un ensemble 
dense dans G. Par consequent, xq est egalement l'unique point fixe de tout 
autre element g Id de G. II en resulte que la G-orbite de tout point x 
different de xq est une courbe fermee simple. Cette courbe est invariante par 
/ et borde un disque qui contient necessairement un point fixe de /, en vertu 
du theoreme du point fixe de Brouwer. Ce point fixe ne pent etre que xq, ce 
qui acheve la demonstration du lemme IT6l □ 

Lemme 4.7. Etant donne une action topologique et fidele de U(l) sur le 
disque , il existe un arc simple rencontrant chaque orbite en un point et 
un seul. 

Remarque 4.8. Je ne connais pas de preuve elementaire de ce lemme. La 
demonstration proposee ici est une construction « a la main » de cet arc 
transverse. On pourra remarquer que ce resultat n'est pas une consequence 
immediate du lemme 14.61 II existe en effet des partitions de I'anneau par 
des families de courbes fermees simples essentielles qui n'admettent pas de 
transversale. On pourra consulter (23] pour plus de details sur le sujet. 
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Soit G I'image de U(l) dans Homeo(D^) et xq, I'unique point fixe de G. 
Pour tout X G Z)^, on note 7(x) la G-orbite de x. 

Sous-lemme 4.9. Pour tout e > 0, il existe 6 > tel que si x et y sont deux 
points distincts d'une meme G-orhite 7 et d{x, y) < 6, alors un des deux arcs 
delimites par x et y sur ^ a un diametre inferieur a e. 

Demonstration. Notons xq, I'unique point fixe de G. Soit e > et A un 
disque contenant xq, invariant par G et de diametre inferieur a e (voir 
theoreme 12. 5p . On pose A = \ A. II suffit de demontrer le sous-lemme 
pour les orbites contenues dans I'anneau A, ce qui resulte de I'observation 
suivante. II existe un voisinage ouvert connexe V de I'identite dans G tel que 

(4.1) d{x,g{x)) <e/2, 

pour tout X & A et g & V. Comme de plus G agit librement sur A, il existe 
5 > tel que : 

(4.2) d{x,g{x))>6, 

pour tout x£Aetg&G\V. Par consequent, si x et y sont deux points 

d'une meme G-orbite j C A tels que d{x,y)) < 6 alors y = g{x) avec g 

et I'arc {g{x); g E V} de 7 a un diametre inferieur a e. □ 

On munit I'ensemble des orbites de G d'un ordre total en definissant la 
relation suivante : 7 < 7 (respectivement 7 < 7 ) si et seulement si 7 est 
contenue dans le disque ferme (respectivement ouvert) borde par 7 (avec la 
convention xq < xq). 

Definition 4.10. Etant donne deux points x,y € D^, tel que 7(x) < 7(1/), 
on appelle fi-chame monotone de x ay, une collection {xq = x, xi, . . . , Xn = y} 
de points de tels que : 

d{xk,Xk+i) < fJ- et 7(xfc) < ^{xk+i), 
pour fc = 0, . . . , n — 1. 

Sous-lemme 4.11. Pour tout e > 0, il existe 6 > tel que deux points 
quelconques x, y n'appartenant pas d la meme orbite et verifiant d{x, y) < 6 
peuvent etre joints par une ^-chame monotone de diametre inferieur a e pour 
tout /X > 0. 

Demonstration. Soit e > et choisissons 5 > d {5 < e) comme dans le sous- 
lemme ^Hl Soient x,y deux points tels que 7(x) < 7(y) et d{x,y) < 6/2. 
Etant donne /j. > (p < S) , on peut trouver une suite finie de G-orbites 



70 = "fix) < 71 < • • • < 7„ = 7(2/) 
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telle que la distance de Hausdorjf^ dninkilk+i) de deux courbes consecutives 
de la suite soit inferieure a /x/3. 

Le segment xy rencontre chacune des courbes intermediaires 7a;. Choisis- 
sons pour chaque A; G {1, . . . , n — 1}, un point 

Xfc G n 7fc. 

Si d{xk,Xk+i) < ^ pour tout k, nous avons construit notre /i-chaine de 
diametre inferieur a e, sinon, voila comment rafRner cette chaine pour en 
obtenir une. 

Soit Xr-,Xr+i, une paire de points consecutifs tels que d{xr,Xr+i) > A*- 
Comme dni^r, 7r+i) < A'/S, on pent trouver un point x'^_^_i sur 7r+i tel que : 

d{xr.,xl^i) < IJ./3, 

et done : 

d{Xr+l, X^+l) < d{Xr+l, Xr) + d{Xr,Xr+i) < 6/2 + < 5. 

Alors, d'apres le sous-lemme 14. 9| un des deux arcs delimites par Xr+i et 
Xj._^i sur 7r+i a un diametre inferieur a e. Subdivisons cet arc en s sous-arcs 
de diametre inferieur a /i/3 et notons les point intermediaires de la fagon 
suivante : 

'01 s 
^r+l ~ ^r+li ^r+1) • • • ) ^r+l ~ Xr+l- 

Choisissons ensuite des courbes 

7r = 7° < 7^ < • • • < 7' = 7r+l- 

Comme djy(7r,7r+i) < /i/3 et 7,- < 7-' < 7r+i pour 1 < j < s — 1, il est 
possible de trouver, sur chaque courbe intermediaire 7-', un point xl._^_l tel 
que < /x/3. La suite 

01 s 

Xr — X^^i , 3^^-1-1 ) • • • ) ^r+l — ^r+1 

est done une A^-chaine joignant Xr et x^+i qui appartient a un 2e-voisinage 
du segment XfX 7*-|~ 1 ■ En effectuant les corrections necessaires pour chaque 
paire Xr,Xr+i telle que d{xr,Xr+i) > on obtient finalement une //-chaine 
monotone joignant x et y et de diametre inferieur a 4e. □ 

Preuve du Lemme \4. 7| En utilisant le sous-lemme 14.111 on pent construire 
une suite de nombres reels (5„ > 0, qui tend vers 0, et telle que deux points 
quelconques x,y verifiant d{x,y) < 5n, peuvent etre joints, pour tout // > 0, 
par une /^-chaine de diametre inferieur a 1/2". 

Soit Xq une 5o-chaine monotone joignant xq, le point fixe du groupe a 
un point Xqo sur le bord du disque D^. Recursivement, ayant defini Xn, on 

"'La distance de Hausdorff est definie sur les parties fermees d'un espace metrique 
compact (X, d) par la formule : 

dniA, B) = max < max d(a, B), max d(6, A) \ . 
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joint chaque paire de points consecutifs x^jX"^^^ de par une (5„+i-chaine 
monotone de diametre inferieur a 1/2"- afin d'obtenir Xn+i et on pose : 

X=\JXn. 

nGN 

C'est alors un exercice standard de topologie Theorem 2.27]) de montrer 
que I'adherence X de X dans est un arc joignant xq et Xoo- Get arc est 
simple et rencontre chaque orbite en un point unique, par construction, ce 
qui acheve la demonstration. □ 

Preuve du theoreme \4-^ Pour completer la preuve du theoreme l4.5| on choisit 
un arc a, transverse aux orbites, donne par le lemme l¥77l et une parametri- 
sation x{r),r G [0, 1] de cet arc. L'application 

h : re'^ ^ ^'(e^^x(r)), 

ou ^' : U(l) X denote Taction, nous donne alors une conjugaison 

topologique avec le groupe des rotations euclidiennes, S0(2). □ 

5. Un lemme de M.H.A. Newman 

Avant d'entreprendre I'etude des sous-groupes compacts d'homeomorphismes 
de la sphere, nous presentons un lemme du a M.H.A. Newman p]5]. 

Lemme 5.1. Soit f un homeomorphisme periodique de de periode p > 1, 
alors parmi les iteres de f , il en existe un, disons f , tel que : 

(5.1) d{fjd)>l. 
De plus : 

(5.2) d{f,Id)>^. 

Demonstration. Commengons par remarquer que H5.2p est une consequence 
de (|5.H1 . En effet, dans (|5.1|l . on peut supposer r < p/2 car I'inegalite (|5.ip 
est equivalente a 

d(/f-^/d)>l. 

Par consequent la negation de (j5.2|l conduit a 

r— 1 

d{r{x),x) <y^d{r+Hx)j\x)) < - < i, vx, 

et done a la negation de H5.ip . 

La preuve de la premiere inegalite resulte de la remarque suivante : sup- 
posons au contraire que d{f^,Id) < 1 pour tout k, alors I'orbite d'un point 
quelconque x est entierement contenue dans I'hemisphere de pole x et par 
suite, pour tout p-uplet (Aq, Ai, . . . , Xp-i) de nombres positifs tels que SAj = 
1 : 

p-i 

(5.3) g^(x) = ^\J\x)^0, 

i=0 
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pour tout X. Ceci implique I'existence d'une homotopie dans — {0} entre 
I'identite et la fonction 

1 

(5.4) g{x) = -J2nx), 

ce qui est incompatible avec le fait que deg{g) = modulo p. □ 

Corollaire 5.2. La houle unite fermee de Homeo(S'^) ne contient aucun 
sous-groupe compact non trivial. 

Demonstration. En effet, si un tel groupe existe, on peut trouver un element 
non trivial / de ce groupe tel que 

d{r,id)<i, 

pour tout n G Z. En vertu du lemme IbTTI / n'est pas periodique. Quitte a 
remplacer / par son carre, on peut supposer que / preserve I'orientation et 
done possede au moins un point fixe. Alors, d'apres le lemme 12.51 / laisse 
invariant un disque topologique et la fermeture du groupe engendre par / 
est isomorphe a U(l). Mais ce groupe contient des element periodiques g 
verifiant egalement 

d{g'',Id)<l, 

pour tout n € Z, ce qui est en contradiction avec le lemme I^TTl □ 

II en resulte qu'un sous-groupe compact d'liomeomorpliismes de la sphere 
ne possede pas de petit sous-groupe. En vertu du Theoreme ll.l| on peut done 
enoncer : 

Theoreme 5.3. Tout sous-groupe compact d'homeomorphismes de la sphere 
est un groupe de Lie 

6. Preuve du theoreme principal 

Cette section est consacre a la demonstration du theoreme 11.21 Nous en- 
visagerons dans un premier temps le cas d'un sous-groupe compact G qui ne 
contient que des elements qui preservent I'orientation, puis le cas general. 

6.1. G ne contient que des elements qui preservent I'orientation. 

Lemme 6.1. Soit G un sous-groupe compact de Homeo'^(S'^). Alors tout 
element de G est topologiquement conjugue a une rotation euclidienne d'ordre 
finie ou non. 

Demonstration. Soit 5 € G un element non trivial. En tant qu'homeomor- 
phisme qui preserve I'orientation de la sphere, g possede un point fixe xq 
(theoreme de Lefschetz, par exemple). Du theoreme 12. 5( on deduit I'exis- 
tence d'un disque invariant A contenant xq. Le disque 5^ \ A est egalement 
invariant et contient done un second point fixe Xq de g. En vertu du corol- 
laire ^21 Fix{g) est reduit a ces deux points. 
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Si g est d'ordre fini, il est conjugue a une rotation euclidienne d'ordre 
fini (voir |7|). Sinon, I'adherence H du groupe engendre par g est isomorphe 
a U(l) (voir corollaire I4.4|l . Les orbites de H sont constituees par les deux 
points fixes xq,Xq et des courbes fermees simples qui separent xq et Xq. Le 
lemme lTTI nons assure I'existence d'un arc transverse aux orbites, joignant xq 
et Xq, ce qui nous permet, comme dans la preuve du theoreme 14.51 d'etablir 
que g est topologiquement conjugue a une rotation euclidienne d'ordre infini. 

□ 

Soit X G 5^. Le stahilisateur de x, note Stab{x), est le sous-groupe des 
elements g de G tels que ^(x) = x. Le sous-groupe compact Stab{x) laisse 
invariant un disque contenant x. II est isomorphe a un sous-groupe ferme du 
groupe U(l) en vertu du corollaire 14.41 

Inversement, soit H un sous-groupe ferme de G. Si Fix{H) ^ alors 
Fix{H) contient exactement deux points xo,Xg et H est isomorphe a un 
sous-groupe ferme du groupe U(l). 

Lemme 6.2. Si G est infini, il possede un sous-groupe isomorphe d U(l). 

Demonstration. D'apres le theoreme 15.81 G est un groupe de Lie. Par con- 
sequent, si G est infini, sa dimension est superieure a 1 (car G est compact). 
II possede done un sous-groupe a un parametre non trivial et contient des 
elements d'ordre infini. Soit g un tel element. Alors I'adherence du groupe 
engendre par g est isomorphe a U(l). □ 

Nous allons maintenant envisager les divers cas possibles. 

6.1.1. Cas 1 : G est fini. Chaque element non trivial de G possede exacte- 
ment deux points fixes. Seulement un nombre fini de points de la sphere 
ont un stabilisateur non trivial. Soit S cet ensemble, alors la projection 
canonique vr : 5^ — > S'^/G est un revetement ramifie et on a la formule de 
Riemann-Hurwitz : 

(6.1) x{S')=nxiSVG)- Yl 

oil n designe le cardinal de G et z^j est le cardinal des stabilisateurs des 
points de ramification s € s. De cette formule, il resulte que x{S'^/G) = 2 
et done que S'^/G est homeomorphe a 5^. Ces revetements sont entierement 
classifies par Taction du groupe G sur I'ensemble fini S. A chaque solution 
donnee par la formule (|6.H1 correspond un sous-groupe fini de S0(3) et done 
une conjugaison topologique de G avec ce sous-groupe. 

6.1.2. Cas 2 : il n'y a qu'un stabilisateur infini. Soit H ce stabilisateur et 
designons par xq et Xq les points fixes de H. Soit g un element quelconque 
du groupe G. Alors le point g{xo) est egalement d'indice infini et done neces- 
sairement 

g{xo) e Fix{H) = {xq, Xq} . 
Si de plus ^(xo) = xq, alors g & H. 
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- Si ceci se produit pour tous les elements du groupe alors G = H et le 
groupe G est topologiquement conjugue au sous-groupe des rotations eucli- 
diennes autour d'un axe donne. 

- Sinon, on peut trouver un element cr dans G tel que cr{xQ) = Xq et 
o"(xo) = Xq. On a alors necessairement o"^ = Id et aha = h~^, pour tout 
h ^ H . G est done isomorphe au groupe diedral infini 

Doo = ^2 X U(l) 

De plus, a induit une involution continue sur I'espace des orbites de if, qui 
est homeomorphe a un intervalle, et echange ses deux extremites. Par suite, 
a laisse invariant une et une seule des orbites de H . Les points fixes de 
a sont necessairement sur cette courbe. On construit alors facilement une 
conjugaison entre ce groupe G est Taction euclidienne standard du groupe 

Doo. 

6.1.3. Cas 3 : il y a au moins deux stabilisateurs infinis distincts. Dans ce 
cas, le groupe G agit transitivement sur S"^ en vertu du resultat suivant. 

Lemme 6.3. S'il existe deux stabilisateurs infinis distincts (en tant que sous- 
groupes de G), alors le groupe G agit transitivement sur la sphere. 

Demonstration. Soit o et 6 deux points d'indice infini ayant des stabilisateurs 
distincts Ha et Hh respectivement. L'orbite du point a sous Taction du groupe 
Hh, que Ton notera Hiy{a) est une courbe fermee simple passant par a et qui 
rencontre toutes les orbites du sous-groupe Ha assez voisines de o. Par suite, 
la G-orbite du point o, G(a), est ouverte et fermee dans 5^, ce qui acheve la 
demonstration. □ 

Fixons done un point o de la sphere et designons par H le stabilisateur de 
ce point (necessairement isomorphe a U(l)). L'espace homogene, G/H = S*^, 
est muni naturellement d'une structure de variete analytique sur laquelle G 
agit egalement de fagon analytique. On a done trouve sur une structure 
analytique invariante par G. On peut alors construire, par moyennisation, 
une metrique riemannienne sur 5^ invariante par G. Comme Taction de G est 
transitive, cette metrique est a courbure constante. Quitte a multiplier cette 
metrique par une constante, on peut supposer que cette courbure est 1. Par 
consequent, cette variete riemannienne est isometrique a la sphere standard 
et cette isometric definit la conjugaison recherchee entre G et SO (3). 

6.2. G contient des elements qui renversent I'orientation. Commengons 
par rappeler les faits suivants. Soit s un homeomorphisme regulier de la 
sphere qui renverse I'orientation. 

- Si s possede un point fixe, alors necessairement = Idet s est topologique- 
ment conjugue a une reflexion orthogonale [Zj. 

- Si = Id mais s est sans point fixe, alors S'^/s est homeomorphe au 
plan projectif et par suite, du fait de Tunicite du revetement universel, 
s est topologiquement conjugue a la symetrie centrale x i— > —x. 
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Soit Go le sous-groupe de G des elements qui preservent I'orientation. 
Go est un sous-groupe distingue d'indice 2. Quitte a effectuer une premiere 
conjugaison, on peut supposer que Go C S0(3). 

6.2.1. Cas i .• Go ~ S0(3). Soit s G G \ Gq. Tout cercle (euclidien) de S'^ 
est une orbite du stabilisateur Stab{x) dhm point dans Gq. Par consequent, 
I'image par s de tout cercle de 5^ est un cercle. D'apres un resultat bien 
connu, ceci entraine que s est une anti-homographie de la sphere. Comme 
de plus s est regulier, s appartient necessairement a 0(3) et ceci permet de 
conclure que G = 0(3) 

6.2.2. Cas 2 : Go 0=: S0(2). Dcsignons par xq et Xq les points fixes de Gq 
et soit s G G \ Go- Alors, s permute les orbites de Gq et induit un homeo- 
morphisme sur le quotient S'^ /Gq qui est un intervalle. II y a done deux 
possibilites : 

- Si .s fixe Xq et .Tq, alors = Id et s est conjuguc a une reflexion. G est un 
produit semi-direct de Z2 par U(l) et sgs = pour tout g G Go- En effet, 
sinon on aurait sgs = g pour tout 3 G Go et la courbe Fix{s) qui contient xo 
et Xq serait une orbite de Go ce qui n'est pas possible. Par ailleurs, s induit 
un homeomorphisme croissant sur I'intervalle S'^/Gq de periode 2 qui ne 
peut done etre que I'identite. Par suite, s preserve les orbites de Go- Chaque 
orbite non triviale de Go rencontre Fix{s) en deux points au moins. Mais 
si X et y sont deux points distincts de Fix{s) appartenant a la meme orbite 
de Go, alors y = g{x) pour un certain g € Gq et la relation sgs = g~^ nous 
donne g'^{x) = x. Done g est necessairement d'ordre 2 et ceci nous permet 
de conclure que chaque orbite non triviale de Gq ne rencontre Fix{s) qu'en 
deux points seulement. On est alors en mesure de construire une conjugaison 
entre G et le sous-groupe de 0(3) engendre par les rotations autour de I'axe 
xqXq et la reflexion par rapport a un equateur contenant cet axe. 

- Si s cchange xq et .Xq, alors s induit un homeomorphisme decroissant sur 
I'intervalle S'^ /Gq. Cet homeomorphisme a un unique point fixe qui corre- 
spond a une orbite J de Gq invariante par s. Alors, quitte a composer s avec 
une rotation de Gq on peut supposer que s a un point fixe sur J et done se 
ramener encore une fois au cas oii = Id et s est conjugue a une reflexion. 
On a Fix{s) = J et done sgs = g pour tout g G Go. Dans ce cas, G est 
le produit direct de Z2 par U(l) et on construit facilement une conjugaison 
entre G et le sous-groupe de 0(3) engendre par les rotations autour de I'axe 
xqXq et la reflexion par rapport a I'equateur orthogonal a cet axe. 

6.2.3. Cas 5 ; Go — -Dqo- Dans ce cas Gq est engendre par le groupe des 
rotations autour d'un axe xoXq et par un retournement p qui echange xo et 
Xq et dont I'axe est perpendiculaire a la droite xoXq. Soit s G G \ Go, alors 
s permute egalement les points xq et Xq car le sous-groupe des rotations 
autour de I'axe xqXq est invariant par s. Quitte a composer s avec p, on 
peut supposer que s(xo) = xo et s(xq) = Xq et done que s est une reflexion 
topologique. En conjuguant s par une rotation d'axe xqXq, on peut supposer 
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egalement que Fix{s) contient les points fixes de p. Alors sps = p. On 
construit alors facilement une conjugaison entre G et le sous-groupe de 0(3) 
engendre par Gq et la reflexion plane par rapport au plan contenant I'axe 
xqXq et I'axe du retournement p. 

6.2.4. Gas 4 ■' Gq est fini. Dans ce cas Go appartient a un des cinq types 
bien connus de sous-groupe fini de S0(3) |T]. II y a deux possibilites : 

- G\Go ne contient aucune reflexion topologique, autrement dit, Fix{s) = 
pour tout s € G \ Gq. Alors S'^/G est homeomorphe au plan projectif et 
la projection canonique vr : 5^ — > S'^/G est un revetement ramifie, ce qui 
permet de conclure que G est conjugue a un sous-groupe fini de 0(3). 

- G\Gq contient une reflexion topologique. Dans ce cas, G est un produit 
semi-direct 

Z2 K Go. 

Par ailleurs, si s et s' sont deux reflexions topologiques distinctes dans G alors 
le cardinal de I'ensemble Fix{s) riFix{s') est egal a 2. En effet, un point fixe 
commun a s et s' est un point fixe de la rotation ss' qui en possede au plus 2 
et si les deux courbes Fix{s) et Fix{s') ne s 'inter sect ent pas, ou seulement 
en un point, alors la rotation ss' envoie un disque ferme a I'interieur de 
lui-meme (a I'exclusion eventuellement d'un point du bord), ce qui n'est pas 
possible pour une rotation. On est alors en mesure de construire « a la main » , 
dans chacune des cinq situations possibles, des domaines fondamentaux et 
de montrer, chaque fois, que G est conjugue a un sous-groupe fini de 0(3) 
(voir [3 et (HI). 
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